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摘要 科技 评估 在 科技 管理 中 发 挥 着 重要 的 作用 ， 从 智库 角度 而 言 ， 其 不 仅 是 智库 研究 的 重要 任务 ,而 且 是 
智库 研究 质量 的 重要 保障 。 然 而 ， 现 有 科技 评估 方法 通常 作用 于 评估 问题 的 局 部 ， 缺 少 从 辩证 法 及 系统 论 角 
度 对 科技 评估 全 过 程 方法 体系 的 思考 与 认 知 。 为 此 ， 文 章 将 潘 教 峰 提 出 的 解决 智库 研究 一 般 问 题 的 DIIS 理论 
方法 运用 于 科技 评估 ， 据 此 提出 科技 评估 DIIS 方法 ， 进 而 从 DIIS 视角 出 发 将 科技 评估 在 科技 决策 咨询 中 的 作 
用 界定 为 六 大 功能 : 证 据 形成 功能 、 衡 量 比较 功能 、 诊 断 分 析 功 能 、 前 上 脆 预测 功能 、 价 值 导 向 与 判断 功能 和 
质量 控制 功能 。 最 后 以 机 构 评估 、 项 目 评 估 、 政 策 评 估 和 研究 质量 评估 为 例 ， 分 析 科 技 评估 DIIS 方 法 的 实践 
应 用 ， 以 期 为 我 国 科 技 评估 实践 提供 一 种 方法 指引 与 支撑 。 
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科技 评估 作为 科技 管理 的 重要 手段 和 工具 ， 在 促进 ”2017 年 2 月 ， 中 央 深 改组 第 三 十 二 次 会 议 审 议 通过 
我 国 经 济 社会 发 展 、 科 技 进步 中 发 挥 着 重要 作用 。 随 着 了 《国家 科技 决策 咨询 制度 建设 方案 》， 强 调 建设 
新 一 轮 科 技 革命 和 产业 变革 的 加 速 演进 ， 科 技 活动 的 复 国家 科技 决策 咨询 制度 ， 建 立 科 技 决 策 最 高 智库 ; 
杂 性 和 不 确定 性 加 大 ， 对 科技 评估 提出 更 高 的 要 求 。 和 党 2016 年 5 月 ,习近平 总 书记 在 《为 建设 世界 科技 强国 而 
的 十 八大 作出 实施 创新 驱动 发 展 战略 的 重大 部 署 , 十 八 ” 奋斗 》 的 重要 讲话 中 强调 “要 加 快 建立 科技 咨询 支撑 行 
届 三 中 全 会 对 科技 体制 改革 提出 新 要 求 ， 党 中 央 、 国 务 。 政 决 策 的 科技 决策 机 制 ， 加 强 科技 决策 咨询 系统 ， 建 设 
院 相关 文件 提出 要 完善 创新 评价 制度 ， 加 强 对 创新 政策 。 高 水 平 科 技 智库 ”。 由 是 观 之 , 科技 评估 在 智库 研究 中 
和 科技 改革 任务 的 督察 评估 ， 定 期 对 政策 落实 情况 进行 。 扮演 着 双重 角色 : 一 方面 ， 科 技 评 估 是 智库 研究 的 重要 
跟踪 分 析 ， 并 及 时 调整 完善 。 因 此 ， 科 技 评估 已 成 为 新 ”任务 ,无 论 是 研判 科技 发 展 大 势 和 方向 ， 还 是 从 科技 作 
一 轮 科技 体制 改革 的 重要 任务 。 用 和 影响 的 角度 研究 改革 发 展 中 的 重大 问题 ， 科 技 智库 

科技 评估 也 已 成 为 科技 智库 任务 的 战略 重点 。 都 要 开展 科技 评估 ， 为 提出 科学 建议 提供 基础 ， 另 一 方 
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面 ， 科 技 评估 是 智库 研究 质量 的 重要 保障 ， 例 如 ， 在 实 
践 中 世界 知名 智库 都 有 对 自身 研究 工作 进行 评估 的 程序 
和 制度 安排 ， 以 此 确保 智库 研究 成 果 质 量 。 因 此 ， 如 何 
建设 完善 科学 合理 的 科技 评估 方法 体系 ， 开 展 科学 评 
佑 ， 为 我 国 创新 发 展 提供 有 力 决策 支撑 ， 是 我 国 科 技 决 
策 咨询 体系 和 智库 建设 中 需要 考虑 的 重要 问题 。 然 而 ， 
从 现 有 科技 评估 方法 来 看 ， 其 通常 作用 于 评估 问题 的 局 
部 ， 缺 少 从 辩证 法 及 系统 论 角 度 对 科技 评估 全 过 程 方法 
体系 的 思考 与 认 知 ， 需 要 发 展 系统 、 科 学 的 新 方法 、 新 
工具 来 加 以 解决 。 

中 科 院 科技 战略 咨询 研究 院 院 长 潘 教 蜂 研究 员 " 指 
出 : 科技 智库 研究 的 对 象 往往 是 复杂 、 综 合 的 战略 和 政 
策 问 题 ， 不 仅仅 涉及 科技 问题 ， 而 且 涉及 经 济 、 社 会 、 
环境 、 管 理 等 诸多 方面 的 问题 ， 仅 就 科技 问题 而 言 ， 
往往 是 跨 领 域 、 跨 学 科 、 综 合 交叉 的 。 为 此 ， 濡 教 峰 等 
在 分 析 国 内 外 智库 研究 现状 基础 上 ， 对 智库 问题 的 一 
般 性 研究 思路 进行 系统 归纳 ， 从 智库 问题 研究 的 全 过 
程 ， 即 “收集 数据 ( Data ) 一 揭示 信息 (Information ) 一 
综合 研判 (Intelligence) 一 形成 方案 (Solution ) ” 
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也 是 科技 智库 进行 科技 战略 管理 和 绩效 管理 的 重要 工 
具 。 本 通过 分 析 科 技 评估 的 内 涵 ， 结 合 科 技 评估 发 展 
面临 的 新 要 求 ， 梳 理 现 有 科技 评估 方法 体系 中 存在 的 问 
题 。 

1.1 科技 评估 的 内 涵 

科技 评估 根据 科技 决策 者 、 资 助 者 及 相关 利益 群 
体 的 需求 ， 确 定价 值 标准 ， 用 科学 的 方法 收集 和 处 理 评 
佑 对 象 的 相关 信息 ， 是 判断 价值 实现 程度 的 过 程 ， 体 现 
了 评估 者 的 价值 理念 和 价值 追求 。 除 遵循 评估 活动 的 一 
般 规 律 外 ， 科 技 评估 又 由 于 科技 活动 的 性 质 而 具有 特殊 
TE: 中 科学 研究 活动 的 结果 难以 预测 ;，@) 科学 研究 活动 
的 成 果 难 以 定量 评 佑 ; O 科学 研究 成 果 所 产生 的 作用 和 
影响 难以 定量 评 佑 。 

随 着 科技 在 经 济 社会 发 展 中 的 作用 日 益 增 强 ， 科 技 
评估 的 目的 、 对 象 、 内 容 等 不 断 延 伸 ， 成 为 科技 战略 管 
理 的 重要 工具 和 公众 理解 科技 的 重要 渠道 。 同 时 ， 科 技 
评估 的 要 素 从 不 同 的 角度 来 看 也 不 尽 相 同 〈 表 1 ) 。 

R1 科技 评估 基本 要 素 


科技 评估 角度 科技 评估 要 素 
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(DIIS ) ， 对 智库 研究 方法 论 进行 再 思考 ， 提 出 问题 导 科技 评估 目的 为 科技 资源 配置 或 科技 政策 调整 提供 依据 、 分 析 和 判断 科技 竞争 
能 力 、 提 升 科技 活动 管理 绩效 、 回 答 公众 关注 的 科技 投入 效果 等 

癌 、 证 据 导 向 、 科 学 导向 下 的 智库 研究 DIS 理论 方法 。 人 员 、 团 队 、 研 究 机 构 、 研 究 领 域 、 研 究 项 目 、 研 究 计划 、 科 技 
智库 DIIS 理论 方法 起 源 于 对 智库 研究 全 过 程 的 思 政策 、 国 家 科技 创新 能 力 等 

A ~ AM +m 43 斗 技 计划 | 马 vl. 和 、 科 技 活动 的 实 过 程 、 科 3 

考 与 概括 ， 系 统 归纳 了 智库 问题 的 一 般 研 究 规律 ， 对 智利 扩 评估 两 容 ANUAR E PURNA Hcsssstgesge, Poss 


社会 与 经 济 的 影响 等 
库 问题 具有 很 好 的 适用 性 ， 同 样 适用 于 科技 评估 。 有 和 鉴 
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评估 、 外 部 评估 (评估 者 来 自 组 织 或 环境 外 部 ) 、 内 部 评估 
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于 此 ， 本 文 利用 智库 DIS 理论 方法 对 科技 评估 全 过 程 进 UD 

MM ; TM 为 获得 评估 对 象 的 必要 信息 进行 的 事前 评估 (发 展 性 评估 ) 、 
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行 再 思考 : 首先 ， 分 析 科 技 评估 的 内 涵 及 其 发 展 面临 的 。 科技 评估 时 期 为 解决 科学 研究 活动 中 的 关键 间 题 进行 的 事 中 评估 (诊断 性 评 
他 ) 、 对 科学 研究 活动 结果 的 事后 评估 (价值 判断 评估 ) 


新 要 求 ; 其 次 ， 对 智库 DIIS 理论 方法 体系 进行 简 述 ; 进 
而 ， 基 于 评估 规律 形成 科技 评估 DIS 方法 ， 并 从 DIIS 视 
角 对 科技 评估 在 科技 决策 咨询 中 的 作用 进行 界定 ; 最 
后 ， 以 机 构 评 估 、 项 目 评 估 、 政 策 评估 和 研究 质量 评估 
为 例 ， 分 析 科 技 评估 DIIS 方法 的 实践 应 用 。 


1.2 科技 评估 发 展 的 新 要 求 

在 科技 成 为 引领 经 济 社会 发 展 主导 力量 的 今天 ， 科 
技 评估 在 科技 活动 管理 中 的 作用 更 加 突出 ， 丰 富 多 样 、 
发 展 变 化 的 科技 活动 也 对 科技 评估 提出 新 的 要 求 。 

(1) 科技 评估 需 关注 科技 活动 的 全 过 程 。 科 技 评 
估 的 内 涵 已 从 传统 单一 产 出 环节 的 评估 ， 拓 展 到 科技 规 


1 当前 科技 评估 面临 的 问题 
科技 评估 既是 构建 科技 竞争 发 展 环境 的 重要 基础 ， 
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划 、 科 技 投 入 、 组 织 实施 、 科 技 产 出 及 其 影响 效果 等 科 ” 理 的 研究 方法 ， 从 而 保证 智库 研究 成 果 的 高 质量 和 客观 
技 活动 各 个 环节 的 评估 ， 需 要 采用 目标 、 过 程 、 结 果 三 ”性 。 为 此， 本 节 简 述 潘 教 峰 等 2 提出 的 系统 性 研究 方法 体 
者 相 结合 的 新 模式 对 科技 活动 进行 全 过 程 的 评估 ， 以 适 “”。 系 一 一 智库 DIIS 理论 方法 。 
应 科技 活动 的 发 展 变化 。 结合 长 期 从 事 科技 战略 研究 和 重大 规划 的 经 验 ， 
(2) 科技 评估 需 充分 发 挥 诊断 分 析 的 作用 。 随 着 。 潘 教 峰 总结 提 炼 智 库 研究 问题 的 一 般 性 思路 ， 并 将 智 
科技 活动 的 规模 日 益 增 大 ， 科 技 管理 决策 所 面临 的 问题 。 库 问题 的 研究 过 程 归纳 为 智库 DIIS 理论 方法 : 首先 ， 
越 来 越 复杂 ， 科 技 评估 应 更 加 注重 对 科学 研究 过 程 的 诊 。 围绕 所 研究 的 问题 全 面 收集 各 类 相关 数据 和 相关 现象 
断 、 分 析 和 改进 ， 从 而 确定 科学 研究 过 程 中 存在 的 薄弱 (Data) ; 其 次 ， 进 行 专业 化 的 挖掘 、 整 理 和 分 析 ， 
环节 ， 提 出 相应 的 改进 措施 和 方法 。 形成 客观 的 认 知 ( Information ) ; 进而 ， 引 入 专家 智慧 
(3) 科技 评估 需 注 重 定量 评估 与 定性 评估 的 有 机 ”对 这 些 认 知 进行 研判 ( Intelligence ) ， 得 到 新 认识 和 新 
结合 。 随 着 政府 和 公众 对 科技 评估 客观 性 的 要 求 日 益 增 。 思路 ; 最 后 ， 在 问题 导向 下 提出 解决 方案 或 政策 建议 


> 强 ， 基 于 科学 工具 与 方法 的 定量 评估 在 科技 评 佑 中 占有 (Solution ) ， 最 终 为 宏观 决策 提供 高 质量 和 有 建设 性 
o 日 益 重 要 的 位 置 。 因 此 ， 开 展 科技 评 佑 活动 时 应 注重 在 ”的 智库 研究 报告 。 由 上 可 知 ，DIIS 理论 方法 可 以 概括 为 
e 定量 评估 的 基础 上 进行 定性 评估 ， 或 在 定性 评估 基础 上 “收集 数据 (Data) 一 揭示 信息 (Information ) 一 综合 研 
e 进行 定量 处 理 ， 结 合 客观 信息 和 专家 经 验 形成 多 角度 全 A CIntelligence) 一 形成 方案 (Solution ) ”。 

o 方位 的 综合 评估 结果 。 智库 DIIS 理论 方法 针对 现行 智库 研究 方法 体系 的 系 
Sa (4) 科技 评估 需 注重 科学 性 和 高 质量 。 目 前 许多 科 ” 统 性 缺乏 问题 ， 归 纳 了 智库 研究 问题 的 一 般 性 思路 。 具 
E 技 评估 报告 的 审核 缺乏 专业 性 ， 评 估 结 果 的 可 靠 性 和 科 ” 体 地 ， 在 开展 智库 研究 时 应 从 间 题 导向 、 证 据 导 向 和 科 
> 学 性 有 待 商 榨 。 因 此 ， 开 展 科 技 评估 时 应 从 客观 事实 和 ” ”学 导向 出 发 “WW， 基 于 DIIS 理论 方法 对 智库 问题 进行 研究 
x 数据 出 发 ， 形 成 可 以 循环 论证 的 评估 结果 ， 确 保 评 佑 结 (图 1) : 问题 导向 是 指 智库 研究 需要 结合 问题 的 特征 
© 果 的 高 质量 。 进行 综合 研究 ， 以 问题 为 导向 的 DIIS 研究 遵循 “凝练 问 
E 总 体 来 看 ， 随 着 国家 治理 体系 和 治理 能 力 现代 化 的 。 题 一 分 析 问 题 一 综合 问题 一 解决 问题 ”4 个 阶段 的 流程 ; 
o 深入 发 展 ， 科 技 评估 在 我 国政 策 实 施 情况 评估 、 政 策 方 ” 证据 导向 是 指 智库 研究 过 程 要 有 理 有 据 ， 以 证 据 为 导向 


案 制定 的 前 期 论证 中 也 发 挥 着 重要 的 作用 ; 同时 ,这 也 ”的 DIIS 研究 从 DIIS 的 4 个 阶段 出 发 保证 智库 研究 的 高 
对 我 国 科技 评估 工作 的 科学 性 和 系统 性 提出 了 更 高 的 要 ”质量 ; 科学 导向 是 指 智库 研究 要 利用 科学 的 研究 方法 和 
求 。 然而， 从 现 有 科技 评估 方法 来 看 ， 通 常 作用 于 评估 
问题 的 局 部 ， 存 在 分 散 化 和 系统 性 缺乏 的 问题 ， 缺 少 从 
辩证 法 及 系统 论 角度 对 科技 评估 全 过 程 方法 体系 的 思考 MMEECELZLDEC sent. ono cse soe 
与 认 知 ， 评 估 结果 的 科学 性 有 待 进一步 论证 。 

分 析 问 题 息 客 观 、 关 联 、 时 效 人 信息 全 面 、i 
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研判 专业 、 综 合 ”人 研判 系统 、 独 立 、 公 平 
系统 性 方法 体系 缺乏 的 问题 ， 并 不 仅仅 存在 于 科技 


评估 领域 ， 而 是 在 智库 咨询 研究 中 普遍 存在 。 因 此 ， 需 dal 
要 先 对 智库 研究 的 理论 方法 体系 进行 归纳 ， 形 成 科学 合 RN 


解决 问题 方案 可 行 、 严 着 、 可 靠 亿 > 有 新 思想 、 前 上 脆 、 科 学 
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工具 对 问题 进行 系统 性 研究 ， 以 科学 为 导向 的 DIIS 研究 
从 DIIS 的 4 个 阶段 出 发 保证 智库 研究 的 科学 性 。 

智库 DIIS 理论 方法 遵循 智库 研究 问题 的 一 般 性 
思路 ， 不 仅 适 用 于 科技 问题 研究 ， 而 且 可 以 应 用 于 社 
会 、 经 济 、 生 态 等 领域 战略 和 政策 问题 的 研究 。 此 外 ， 
在 DIIS 研究 的 4 个 环节 及 其 全 过 程 ， 应 始终 坚持 方法 创 
新 ， 坚 持 基 于 专业 知识 和 科学 证 据 的 科学 精神 ， 用 好 技术 
预见 、 路 线 图 等 有 效 的 研究 方法 和 工具 ， 运 用 信息 技术 、 
大 数据 技术 、 管 理 决策 技术 、 融 合 汇聚 技术 、 人 工 智 能 和 
运筹 学 、 系 统 工 程 、 复 杂 科 学 等 研究 的 最 新 成 果 ， 创 新 发 
展 科 技 战 略 咨询 研究 的 新 方法 、 新 模型 、 新 工具 ， 如 科学 
结构 地 图 、 虚 拟 现实 工具 、 政 策 模拟 工具 、 可 视 化 决策 支 
持平 台 等 ， 发 展 形成 有 特色 的 智库 DIIS 理论 方法 ,不 断 
提高 战略 咨询 研究 工作 的 科学 性 ， 为 国家 宏观 决策 提供 
科学 咨询 建议 和 系统 解决 方案 。 


3 科技 评估 的 DIIS 方法 与 功能 


智库 DIIS 理论 方法 起 源 于 对 智库 研究 工作 的 思考 与 
概括 ， 对 智库 问题 具有 很 好 的 适用 性 。 本 节 拟 在 DIIS 视 
角 下 分 析 科 技 评估 的 研究 流程 ， 形 成 科技 评估 DIIS 方 
法 ， 并 从 DIIS 视角 对 科技 评估 在 科技 决策 咨询 中 的 作用 
进行 界定 。 

从 科技 评估 问题 出 发 ， 基 于 DIIS 理论 方法 ， 结 合 
评估 问题 特征 ， 在 问题 导向 、 证 据 导 向 和 科学 导向 下 进 
行 跨 学 科 和 多 领域 的 研究 ， 科 技 评估 DIIS 方法 的 流程 具 
体 如 下 : D 凝练 评估 问题 阶段 ,围绕 科技 评估 问题 收 
集 相关 数据 ， 综 合 各 学 科 知 识 对 问题 进行 关联 性 分 析 ， 
明确 科技 评估 问题 的 特征 ， 并 将 其 分 解 为 多 个 子 问 题 ， 
此 阶段 对 应 DIS 的 Data (收集 数据 ) ; D 分 析 评 估 问 
题 阶段 ， 对 问题 的 相关 数据 进行 整理 分 析 ， 对 分 解 后 的 
子 问题 进行 深入 研究 ， 形 成 客观 认 知 和 初步 意见 ， 此 阶 
段 对 应 DIIS 的 Information ( 揭示 信息 ) ; © 综合 评估 
问题 阶段 ， 系 统 整 合集 成 各 子 问题 的 客观 认 知 信息 和 初 
步 意见 ， 综 合 专家 意见 进行 研判 ， 此 阶段 对 应 DIIS 的 
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Intelligence ( 综合 研判 ) ; O 解决 评估 问题 阶段 ， 依 据 
专家 的 综合 研判 结果 ， 给 出 评估 结论 和 不 同 约束 条 件 下 
的 评估 报告 ， 此 阶段 对 应 DIIS 的 Solution (形成 方案 ) 。 

基于 上 述 4 个 阶段 的 分 析 ， 将 凝练 评估 问题 、 分 
析 评 估 问 题 、 综 合 评估 问题 和 解决 评估 问题 4 个 阶段 凝 
练 为 14 个 步骤 (图 2 ) ， 其 中 3 项 检验 步骤 (步骤 3、 
10 和 13 ) 可 确保 科技 评估 问题 研究 的 全 面 性 和 科学 性 ， 
各 步骤 具体 内 容 如 下 。 

3.1 凝练 评估 问题 阶段 一 -Data 

步骤 1: 界定 评估 问题 。 界 定 科技 评估 问题 的 特征 ， 
注重 各 学 科 之 间 的 联系 ， 对 问题 进行 跨 学 科 与 多 领域 的 
研究 。 

步骤 2: 分 解 问题 。 将 科技 评估 问题 分 解 为 多 个 子 问 
题 ， 并 发 掘 关 键 的 问题 。 

步骤 3: 检验 问题 。 检 验 步 骤 2 中 问题 分 解 的 全 面 
性 ， 若 已 分 解 全 面 ， 则 进入 步骤 4; 若 尚未 完全 分 解 ， 则 
返回 步骤 2 对 问题 补充 数据 重新 分 解 。 

GERA: 确定 问题 及 技术 路 线 。 确 定 需 深 入 研究 的 子 
问题 ， 并 依据 研究 目标 、 对 象 、 资 源 约束 及 具体 需求 形 
成 解决 问题 的 技术 路 线 。 

3.2 分 析 评 估 问 题 阶 段 一 -Information 

步骤 5: 数据 收集 。 收 集 各 项 子 问题 的 相关 数据 。 

步骤 6: 研究 子 问 题 。 整 理 分 析 各 子 问 题 的 相关 数 
据 ， 初 步 形 成 客观 认 知 。 

步骤 7: 综合 研判 子 问题 。 综 合 相关 领域 专家 的 意见 
对 各 子 问 题 进行 综合 研判 。 

步骤 8: 形成 初步 方案 。 依 据 综合 研判 的 结果 ， 初 步 
形成 各 子 问题 的 解决 方案 。 

3.3 综合 评估 问题 阶段 一 Intelligence 

步骤 9: 集成 研究 问题 。 综 合 各 子 问题 的 研究 结果 ， 
集成 得 到 问题 的 研究 结果 。 

步骤 10: 检验 研究 。 检 验 步骤 9 的 集成 结果 是 否 
面 解决 问题 ， 若 已 全 面 ， 则 进入 步骤 11; 者 未 全 面 解决 
问题 ， 则 返回 未 骏 4 循环 论证 研究 过 程 。 
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步骤 11: 综合 研判 。 利 用 不 确定 性 分 析 与 博弈 论 等 
方法 进行 利益 相关 者 分 析 ， 综 合 专 家 意见 对 问题 进行 综 


3.4 解决 评估 问题 阶段 一 Solution 

步骤 12: 形成 多 情景 方案 。 基 于 专家 的 综合 研判 结 
果 ， 构 建 条 件 问题 ， 给 出 不 同 条 件 约束 下 的 方案 集 ， 形 
成 初步 报告 。 
步骤 13: 检验 报告 。 依 据 质量 标准 对 报告 进行 检 


S 


结合 上 述 研究 流程 ， 从 DIIS 视角 出 发 可 将 科技 评估 
在 科技 决策 咨询 中 的 作用 界定 为 六 大 功能 : 证 据 形成 功 
能 、 衡 量 比较 功能 、 诊 断 分 析 功 能 、 前 瞻 预 测 功能 、 价 
值 导向 与 判断 功能 和 质量 控制 功能 ( 表 2 ) 。 


4 科技 评估 实践 的 再 认识 


科技 评估 作为 科技 智库 研究 的 重要 课题 ， 广 泛 应 用 
于 国内 外 智库 的 研究 中 。 本 节 以 德国 马 普 学 会 、 美 国 国 


验 ， 阁 达到 标准 ， 则 进入 步骤 14， 即 生成 科技 评估 报 
告 ; 者 未 达到 标准 ， 则 返回 步 又 1 循环 论证 研究 过 程 。 


F 


步骤 14: 生成 评估 报告 。 依 据 规范 化 格式 生成 最 终 
达标 的 科技 评估 报告 。 


界定 评估 问题 


Step 1 界定 评估 问题 (Data) 
Step 2 分 解 问题 (Information) 
Step 3 检验 问题 (Intelligence) 
Step 4 确定 问题 及 路 线 (Solution) 


Step 5 数据 收集 (Data) 

Step 6 研究 子 问题 (Information) 
Step 7 综合 研判 (Intelligence) 
Step 8 形成 初步 方案 (Solution) 


Step 9 集成 研究 问题 
Step 10 检验 研究 
Step 11 综合 研判 


未 达到 标准 
达到 标准 
生成 评估 报告 


Step 12 形成 多 情景 方案 
Step 13 检验 报告 
Step 14 生成 评估 报告 


图 2 科技 评估 DIIS 方法 


家 科学 基金 会 、 国 务 院 重大 水 利 工 程 政 策 和 英国 高 等 教 
育 机 构 科 研 水 平 的 科技 评估 为 例 ， 分 析 科 技 评估 DIIS 方 
法 在 机 构 评估 、 项 目 评估 、 政 策 评估 和 人 研究 质量 评估 中 
的 应 用 。 
4.1 德国 马 普 学 会 研究 所 评估 实践 

德国 马 普 学 会 主要 开展 德国 大 学 和 其 他 科研 机 构 难 
以 承担 的 自然 科学 、 社 会 科学 与 人 文艺 术 领 域 的 基础 研 
究 ， 同 时 为 马 普 学 会 以 外 的 科研 人 员 提 供 仪器 设备 、 文 
献 资 源 等 。 该 学 会 在 评估 时 聚焦 于 基础 前 沿 研 究 ， 注 重 
研究 成 果 的 质量 ， 并 充分 重视 研究 人 员 的 选择 ， 给 予 研 
究 人 员 充 分 的 自由 。 对 马 普 学 会 研究 所 评估 实践 可 参见 
文献 [4]。 

分 析 马 普 学 会 的 评估 过 程 ， 可 以 发 现 ， 其 基本 遵循 
了 科技 评估 DIIS 的 研究 思路 ， 具 体 归纳 分 析 如 下 : CO 收 
集 数据 一 一 Data。 收 集 各 个 学 科 的 相关 数据 ， 包 括 产 出 
影响 方面 ， 为 各 领域 分 类 评估 提供 基础 性 数据 支撑 。 
© 揭示 信息 一 Information。 通 过 文献 计量 数据 分 析 ， 


表 2 DIIS 视 角 下 科技 评估 的 功能 


科技 评估 作用 体内 容 


作用 环节 


= 


证 据 形 成 功能 T 


诊断 分 析 功 能 


客观 数据 信息 和 合理 研究 方法 ， 综 合集 成 专家 智慧 形成 评估 的 科学 证 据 


衡量 比较 功能 结合 政府 和 科研 机 构 等 评价 方 的 需求 ， 系 统 分 析 比 较 被 评 对 象 的 情况 


通过 深入 分 析 和 循环 论证 ， 对 科技 活动 中 出 现 的 问题 进行 剖析 和 诊断 


前 瞻 预 测 功能 结合 目标 要 求 和 未 来 情景 ， 对 被 评 对 象 的 发 展 态势 进 


价值 导向 与 判断 功能 ”基于 评估 目的 界定 科技 评估 的 价值 导向 和 价值 判断 


质量 控制 功能 通过 被 评 对 象 的 客观 信息 和 专家 学 者 智慧 形成 总 体 j 


知 ， 对 科技 评估 质量 进行 全 过 程控 制 


Data 和 Information 
Information 和 Intelligence 


Information 和 Intelligence 


行 逻辑 推演 ， 预 测 科技 的 未 来 发 展 前 景 Inteligence 


Data, Information, Intelligence 和 Solution 


Data, Information, Intelligence 和 Solution 
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从 学 术 产 出 质量 和 影响 的 维度 揭示 研究 所 各 领域 科学 
前 沿 和 产 出 影响 ， 揭 示 不 同 领域 科研 活动 若干 关键 点 和 
关键 环节 上 的 重要 信息 。@) 综合 研判 
将 数据 分 析 与 各 领域 权威 专家 的 知识 和 研判 结合 ， 重 
在 分 析 研究 所 在 国内 外 的 地 位 以 及 对 青年 科学 家 的 支 
持 ， 提 出 研究 所 各 领域 诊断 评估 意见 。@ 形成 方案 一 一 
Solution。 面 向 马 普 研 究 所 的 未 来 发 展 需求 ， 在 评估 结果 
的 基础 上 形成 对 研究 所 未 来 发 展 和 努力 方向 的 建议 。 
42 美国 国家 科学 基金 会 研究 成 果 评 估 实 践 

美国 国家 科学 基金 会 (简称 NSF ) 是 最 具 代表 性 和 


Intelligence。 
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院 作为 第 三 方 评估 机 构 对 “加 快 重大 水 利 工程 建设 , 今 
^F. (2014 年 ) 再 解决 6000 万 农村 人 口 饮水 安全 问题 的 
政策 措施 落实 情况 ”开展 评估 。 中 科 院 由 院 领 导 牵 头 ， 
成 立 评估 领导 小 组 、 专 家 组 和 咨询 组 ， 组 织 重大 水 利 工 
程 组 和 农村 人 口 饮水 安全 组 分 别 开 展 部 委 、 地 方 政府 和 
利益 相关 方 访谈 ， 通 过 项 目 实地 调研 评估 政策 措施 的 落 
实情 况 。 

总 结 重大 水 利 工程 政策 的 第 三 方 评估 过 程 ， 可 以 发 
现 ， 其 基本 遵循 了 科技 评估 DIIS 的 研究 思路 ， 具 体 归 纳 
分 析 如 下 : CD 收集 数据 一 一 Data。 通 过 资料 调研 、 座 谈 


影响 力 的 国家 级 政府 科学 基金 资助 机 构 之 一 ， 主 要 面向 
科学 和 工程 学 的 基础 研究 项 目 和 教育 研究 项 目 ， 旨 在 
推动 科学 进步 ， 促 进 国 民 健康 和 繁荣 ， 保 障 国防 安全 。 
NSF 每 年 都 要 从 其 资助 项 目的 研究 成 果 中 六 选 出 最 有 显 
示 度 的 亮点 成 果 ， 作 为 绩效 评估 报告 的 重要 部 分 报 送 国 
会 ， 同 时 通过 亮点 成 果 向 社会 公众 展示 其 资助 成 效 。 美 
国 NSF 绩效 评估 实践 可 参见 文献 [5]。 

分 析 NSF 研究 成 果 的 评估 过 程 ， 可 以 发 现 ， 其 基本 
遵循 了 科技 评估 DIIS 的 研究 思路 ， 具 体 归纳 分 析 如 下 : 
D 收集 数据 一 一 Data。 收 集 NSF 各 研究 项 目的 相关 数 
据 ， 包 括 项 目的 研究 价值 、 潜 在 的 影响 和 意义 、 产 生 的 突 
破 性 研究 成 果 以 及 社会 经 济 效益 等 ， 为 研究 成 果 评 估 提 供 
基础 性 数据 支撑 。C) 揭示 信息 一 一 mformation。 通 过 对 成 
果 信息 的 综合 分 析 ， 找 出 与 NSEF 战略 目标 最 相关 且 最 重 
要 的 研究 成 果 。@3) 综合 研判 一 一 Intelligence。 在 科学 处 、 
科学 局 、 机 构 3 个 层面 ， 将 数据 分 析 与 不 同 外 部 专家 的 知 
识 相 结 合 ， 对 照 NSF 的 战略 目标 研判 项 目 成 果 的 突破 性 
程度 。 隐 形成 方案 一 一 Solution。 根 据 研 判 结果 ， 往 选 最 
有 显示 度 的 亮点 成 果 ， 纳 入 NSF 年 度 绩效 报告 ， 并 对 外 
公布 亮点 成 果 ， 向 社会 公众 展示 其 资助 成 效 。 

4.3 国务 院 重 大 水 利 工程 政策 第 三 方 评估 实践 
根据 国务 院 部 署 〈 国 发 明 电 【2014] 1 号) , "PI 


CD 参见 : http://www.ref.ac.uk/ 


访谈 与 实地 考察 相 结合 等 方式 ， 收 集 重 大 水 利 工程 建设 
和 农村 饮水 安全 相关 规划 和 项 目 数 据 ， 为 政策 第 三 方 评 
估 提 供 基础 性 数据 支撑 。@ 揭示 信息 一 一 Information。 
通过 定性 分 析 文献 资料 、 定 量 分 析 数 据 统计 资料 、 统 计 
分 析 批 量 研究 调查 问卷 ， 对 数据 进行 处 理 分析 。(@) 综 
合 研判 一 一 Intelligence。 组 织 专家 组 多 次 召开 集中 研讨 
会 议 ， 将 数据 分 析 与 专家 长 期 研究 经 验 相 结合 ， 对 政策 
实施 情况 的 主要 评估 指标 进行 打分 。 由 形成 方案 一 一 
Solution。 根 据 研判 结果 ， 从 体制 机 制 和 政策 方面 提出 建 
议 ， 形 成 第 三 方 评估 报告 ， 报 送 国务 院 常务 会 议 。 
4.4 英国 高 等 教育 机 构 科 研 水 平 评估 (REF) 实践 

英国 四 大 高 等 教育 基金 委员 会 (HEFCE, SHEFC, 
HEFCW 和 DEL ) 从 1986 年 开始 ， 在 全 英国 范围 内 推行 
科研 评估 制度 ( 简称 RAE ) ， 为 英国 350 余 所 大 学 和 高 
等 学 院 政 府 下 拨 的 基础 性 研究 经 费 提供 决策 依据 。 由 
T RAE 评估 耗资 巨大 ， 同 时 需要 耗费 大 量 评审 专家 的 时 
间 ， 英 国 社会 各 界 对 RAE 评 佑 颇 有 人 微 词 。 因 此 ， 英 国政 
府 2008 年 对 RAE 评 估 进 行 了 改革 ， 提 出 了 新 的 卓越 研究 
评估 框架 REF， 并 于 2014 年 在 英国 推行 "。REF 评估 实 
践 可 以 参见 文献 [6]。 

REF 采用 专家 评议 方式 开展 针对 高 校 科 研 人 员 研 究 
质量 的 评估 ， 并 为 高 等 教育 基金 委员 会 的 拨款 提供 依 
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据 ， 成 为 英国 政府 监控 和 提高 高 校 科 研 质 量 的 手段 ， 有 
利于 促使 大 学 形成 良好 的 内 部 竞争 机 制 。 分 析 REF 研 
究 质量 评估 过 程 ， 可 以 发 现 ， 其 基本 遵循 了 科技 评 
fi; DIIS 的 研究 思路 ， 具 体 归纳 分 析 如 下 : CD 收集 数 
据 一 一 Data。 收 集 待 评估 人员 的 科研 活动 详细 信息 和 科 
研 成 果 ， 形 成 评估 材料 ， 为 科研 人 员 评 估 提 供 基 础 性 数 
据 支撑 。@ 揭示 信息 Information 。 通 过 对 评估 材料 
的 综合 分 析 ， 形 成 科研 人 员 的 初步 评估 结果 。() 综合 
研判 Intelligence。 评 估 组 (包括 子 评估 组 、 跨 组 顾 
问 、 观 察 员 、 外 籍 专家 等 ) 运用 各 自 的 学 科 专 长 ， 根 据 
评分 等 级 形成 每 份 材料 的 总 体 看 法 。@ 形成 方案 一 一 
Solution。 根 据 研 判 结果 ， 形 成 参加 评估 的 高 校 得 到 年 度 
政府 经 费 拨款 的 重要 决策 依据 。 
4.5 对 科技 评估 实践 的 分 析 

通过 机 构 评估 、 项 目 评估 、 政 策 评 估 和 研究 质量 
评估 的 实践 案例 分 析 表 明 ， 其 整体 评估 过 程 基本 都 遵循 
了 科技 评估 DIIS 的 研究 思路 ， 但 由 于 目标 对 象 的 差异 
性 ， 科 技 评估 在 DIIS 各 个 环节 的 侧重 有 所 不 同 。 例 如 ， 
以 Intelligence 环节 为 例 ， 在 德国 马 普 学 会 开展 的 机 构 评 
估 中 ， 该 环节 侧重 于 其 研究 所 各 领域 的 科学 前 沿 和 产 出 
影响 ; 在 美国 NSF 开展 的 项 目 评估 中 ， 该 环节 侧重 于 对 
项 目 成 果 的 突破 性 程度 进行 研判 ; 在 中 科 院 开展 的 国务 
院 重大 水 利 工程 政策 评估 中 ， 该 环节 侧重 于 对 政策 实施 
情况 的 分 析 ; 在 英国 REF 评 估 中 ， 该 环节 侧重 于 对 参评 
人 员 的 科研 活动 质量 进行 评估 。 可 以 看 出 ， 科 技 评估 对 
象 和 目的 的 不 同 直接 导致 了 评估 价值 导向 的 差异 ， 并 且 
贯穿 于 DIIS 的 4 个 环节 中 。 


5 结论 


随 着 科学 技术 的 飞速 发 展 ， 如 何 抓 住 新 一 轮 科 技 
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革命 和 产业 革命 交汇 期 的 历史 机 遇 以 掌握 竞争 发 展 的 主 
动 权 ， 是 我 国 推进 创新 驱动 发 展 、 建 设 世 界 科技 强国 需 
要 考虑 的 重要 课题 ， 需 要 科技 智库 通过 科学 合理 的 科技 
评估 体系 洞悉 未 来 科技 发 展 趋势 、 准 确 人 研判 发 展 方向 和 
战略 重点 ， 为 提出 前 有 瞻 咨询 建议 和 系统 解决 方案 奠定 
研究 分 析 基 础 。 因 此 ， 科 技 评估 不 仅 是 智库 研究 的 重 
要 任务 ， 而 且 是 智库 研究 质量 的 重要 保障 。 本 文 将 智 
E DIIS 理论 方法 运用 于 科技 评估 ， 形 成 了 凝练 评估 问 
题 、 分 析 评 估 间 题 、 综 合 评 估 间 题 和 解决 评估 问题 4 个 
阶段 的 科技 评估 DIIS 方法 ， 并 从 DIIS 视角 重新 揭示 了 科 
技 评估 在 科技 决策 咨询 中 的 6 个 作用 ， 弥 补 了 现 有 科技 
评估 研究 中 存在 的 不 足 ; 此 外 ， 通 过 典型 案例 分 析 了 科 
技 评估 DIIS 方法 的 实践 应 用 ， 为 我 国 科技 评估 实践 提供 
一 种 方法 指引 与 支撑 。 
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DIIS Methodology of Science and Technology Assessment 
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( Institutes of Science and Development, Chinese Academy of Sciences, Beijing 100190, China ) 
Abstract Science and technology assessment plays a prominent role in the science and technology management. It is not only the important 
task of think tank research but also the significant guarantee of think tank research quality. Nevertheless, the existing science and technology 
assessment methods are generally applied in the part of the issue, which lack the thinking and cognition of the whole process methodology of 
science and technology management from dialectics and systems theory, which is a common problem in the think tank research. Therefore, 
based on Data-Information-Intelligence-Solution (DIIS) theory and methodology, this paper systematically analyzes the general laws followed 
by think tanks, and consequently proposes a DIIS method of science and technology assessment. Furthermore, under the perspective of DIIS, 
six functions of science and technology assessment in the science and technology decision-making process are developed. Finally, in order to 
provide a guideline for the science and technology management and decision-making in our country, four examples are provided to illustrate 
the applications of science and technology DIIS method, such as institutional assessment, project assessment, policy assessment, and talent 
assessment. 


Keywords think tank, think tank research method, science and technology assessment, Data-Information-Intelligence-Solution (DIIS) 
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